Yahya ben al-Qasim est accouru vers Fès et s'est installé dans le quartier des Kairouanais avant d'attaquer avec vigueur l'intrus en le chassant définitivement du quartier andalous.
Alors que tout montré que la fin des Idrissides était venue, là on vit jouer la sacralité du serment prononcé par la population de Fès à la dynastie car ils ne se sont pas juste contenté de combattre Abderazak Al-fihri Assafri, ils ont envoyé une lettre à Yahya ben al-Qasim le pressant pour venir mettre un terme à la présence de cet étranger dans la maison Idrisside.